ClouldWatchアラームでEC2インスタンスのステータスチェックを使用して、自動でリカバリーしてみた。

EC2ステータスアラームとは？

EC2は、インスタンスステータスモニタリングを使用して、インスタンスに影響を与える可能性のある問題を検出します。ハードウェアとソフトウェアの問題を見つけるために、EC2はすべてのインスタンスで毎分自動的にチェックを実行します。

• ステータスチェック：OK - すべてのチェックに成功すると、ステータスがOKになります。
• ステータスチェック : impaired  -　1つ以上のチェックが失敗すると、ステータスがimpairedになります。

EC2 インスタンスをモニタリングするために、Amazon CloudWatch アラームを作成して、自動的にimpairedインスタンスを復旧します。ステータスチェックは2つのタイプがあります。

• システムステータスチェック
• インスタンスステータスチェック

 

システムステータスチェック

インスタンスが実行されているAWSシステムは、システムステータスチェックによってモニタリングされます。システムステータスチェックは、フィジカルホスト上のソフトウェアとハードウェアの問題をモニタリングします。

 

ホストの問題の例

• 物理ホストのソフトウェアの問題
• ネットワーク接続の喪失
• システム電源の喪失
• ネットワーク到達可能性に影響する、物理ホスト上のハードウェアの問題

 

問題を解決する方法

システムステータスチェックは失敗になった時、問題を解決するには2つの方法があります。

• AWS がホスト問題を解決するまで待ちます。
• EBS でバックアップされたインスタンスの場合は、インスタンスをSTOPとSTARTして、インスタンスを新しいホストに移動します。

 

CloudWatchメトリクス

システムステータスチェックのCloudWatchメトリクス　：　StatusCheckFailed_System

 

 

インスタンスステータスチェック

インスタンスステータスチェックは、各インスタンスのソフトウェア/ネットワーク設定をモニタリングします。インスタンスステータスチェックが失敗になった時、自分で 問題に対処する必要があります。

 

問題の例

• メモリの枯渇
• 破損したファイルシステム
• 失敗したシステムステータスチェック
• 正しくないネットワークまたは起動設定

 

問題を解決する方法

• インスタンスを再起動します。
• インスタンス設定を変更します。

 

CloudWatchメトリクス

インスタンスステータスチェックのCloudWatchメトリクス　：　StatusCheckFailed_Instance

 

やってみた

 

ステータスチェックの表示

• EC2インスタンスを作成しておきます。
• インスタンスを選択して、「Status checks」のタブを選択したら、特定のインスタンスのステータスを見ることが出来ます。
  開始時はアラームは作されていませんので、アラームステータスは「No alarms」です。これは、Consoleからのステータスチェックです。

 

 

• CLIコマンドによるステータスチェック

aws ec2 describe-instance-status --instance-ids [Id of the instance] --region us-east-1

 

CloudWatchアラームの作成

• Status checksのタブで、「Create status check alarm」を選択しておきます。
• 「Create an alarm」を選択して 、「Alarm action」には「Reboot- インスタンスステータスチェックのために」を選択します。

 

 

• 「Type of data」は「Status check failed: Instance」を選択して、アラームを作成しておきます。

 

アラームを設定して確認する

 

• CLIからアラームを設定しておきます。このコマンドはアラームを作成します。

aws cloudwatch set-alarm-state 
--alarm-name awsec2-i-12345678dfghguh-GreaterThanOrEqualToThreshold-StatusCheckFailed_Instance 
--state-value ALARM 
--state-reason "instance reboot action testing" 
--region us-east-1

 

• このコマンドを実行すると、CloudWatchアラームがトリガーされて、インスタンスが自動的に「Reboot」されます。
• アラームステータスのインスタンス

 

• CloudWatchアラームの状態は「In alarm」になります。

 

• 自動的な「Reboot」の後、インスタンスは「OK」ステータスになります。

 

• アラームの状態も「OK」になります。ステータス変更のイベントは、CloudWatchアラームの履歴 で見ることができます。

まとめ

CloudWatchを介してEC2インスタンスのステータスをモニタリングしてみました。また、「Recover - システムステータスチェック」を使用して自動でリカバリーをすることも可能です。